Bloomfield dilahirkan pada tahun 1965 atau 1966, salah seorang daripada tiga anak Allan Olaf Bloomfield dan Myreine Alice Bloomfield (nama lahir: Osborne).[2][3][4] Ibunya adalah seorang guru sekolah, manakala ayahnya adalah seorang leftenan kolonel di Rejimen Infantri Diraja New Zealand (Askar Wataniah) dan seorang pengurus di Mitsubishi Motors di Porirua, dan dilantik sebagai ahli Order of the British Empire pada Penghargaan Tahun Baru 1974 Ratu Elizabeth[2][3][5] Beliau dibesarkan di Tawa, pinggiran Wellington, dan mendapat pendidikan di Scots College, di mana beliau menjadi ketua pengawas.[2]

Bloomfield lulus dari Universiti Auckland dalam bidang perubatan pada tahun 1990.[6] Di tahun yang sama, Ashley mengahwini isterinya, Libby, juga seorang doktor.[2]